Pada tahun 1849, Robert Campbell meninggal dan para wasi harta tanah menjual harta itu, yang terdiri daripada rumah dan 2.0 hektar (5 ekar), kepada Gibbes kira-kira A £ 1,400. Pada 27 Disember 1851, Gibbes, yang merenung keberangkatan dari Perkhidmatan Kastam pada usia 64 tahun, menjual harta itu kepada James Lindsay Travers, seorang peniaga Macquarie Place, Sydney, dengan ₤ 1,533. (Gibbes kemudian mengubah fikirannya untuk meninggalkan jawatannya sebagai ketua Jabatan Kastam NSW; sebaliknya, dia menyewa Rumah Greycliffe di Pantai Shark, Vaucluse, dari keluarga Wentworth dan tinggal di Sydney untuk bahagian yang lebih baik daripada lapan tahun, akhirnya bersara kepada Yarralumla homestead, kini kediaman Canberra rasmi Gabenor-Jeneral Australia, pada tahun 1859. )

Sebilangan kecil kawasan Kirribilli Point, lebih kurang 0.40-hektar (1-ekar) dijual oleh Travers pada tahun 1854 kepada pedagang, Adolph Frederic Feez. Di tanah ini, Rumah Kirribilli dibina dalam gaya neo-Gothic. Kirribilli House, yang terletak bersebelahan dengan Admiralty House, berfungsi hari ini sebagai kediaman Sydney rasmi Perdana Menteri Australia .